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Анотація. Розглянуто структурно-параметричний синтез нейронних мереж глибокого навчання, 30- 
крема згорткових нейронних мереж, які використовуються при обробці зображень. Надано класифікацію су- 
часних архітектур згорткових нейронних мереж. Показано, що практично кожна згорткова нейронна мережа, в 
залежності від її топології, має унікальні блоки, які визначають її суттєві особливості (наприклад, блок стис- 
нення та збудження (54дцее7е апа Ехсігацоп Віоск), згортковий блок модуля уваги (Сопуоіцпопа! Віоск Апепйоп 
Моашіг), модуль уваги каналу (СБаппе! айепййоп подіє), модуль просторової уваги (5раба! айепіоп тоаців), 
залишковий блок (Везідпа! БіосК), початковий модуль (Шасерйоп подціе), блок ВезМеХ). Поставлено задачу 
структурно-параметричного синтезу згорткових нейронних мереж, для розв'язання якої запропоновано вико- 
ристання генетичного алгоритму. Генетичний алгоритм використовується для ефективного подолання велико- 
го простору пошуку: з одного боку, для генерації можливих топологій згорткової нейронної мережі, а саме ви- 
бору специфічних блоків та місць їх розміщення в структурі згорткової нейронної мережі, а з іншого боку, для 
розв'язання задачі структурно-параметричного синтезу згорткової нейронної мережі обраної топології. Визна- 
чено найбільш значущі параметри згорткової нейронної мережі. Запропоновано метод кодування, який дозво- 
ляє представити кожну мережеву структуру у вигляді рядка фіксованої довжини в двійковому форматі. Після 
цього визначено кілька стандартних генетичних операцій, тобто селекцію, мутацію та кросинговер, які усува- 
ють слабких особин попереднього покоління та використовують їх для генерування конкурентних. Наведено 
приклад розв'язання поставленої задачі: у якості навчальної вибірки використовувалася база даних (результати 
УЗД-досліджень) пацієнтів із захворюванням щитовидної залози. 

Ключові слова: структурно-параметричний синтез; згорткова нейронна мережа; багатокритеріальний 
генетичний алгоритм; блок стиснення та збудження; згортковий блок модуля уваги; залишковий блок; глибоке 
навчання. 
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Вступ 

Застосування багатошарового пер- 
септрона з традиційною структурою при 
вирішенні реальних задач розпізнавання й 
класифікації зображень викликає певні 
труднощі. По-перше, зображення, як пра- 
вило, мають велику розмірність, внаслідок 
чого зростає кількість нейронів і синап- 
тичних зв'язків у мережі. У свою чергу, це 
вимагає збільшення навчальної вибірки, 
внаслідок чого збільшується час і обчис- 
лювальна складність процесу навчання. 
По-друге, ігнорується топологія вхідних 
даних. Компоненти вхідного шару можуть 
бути представлені в будь-якому порядку, 
без урахування мети навчання. Однак зо- 
браження мають строгу  двовимірну 
структуру, в якій існує залежність між 
просторово-сусідніми пікселями |Ї, 5). 

Від цих недоліків вільні так звані 
згорткові нейронні мережі, які являють со- 
бою особливий клас багатошарових пер- 
септронів, спеціально створених для роз- 
пізнавання двовимірних поверхонь з висо- 
ким ступенем інваріантності до масштабу- 
вання, зсуву, повороту, зміни ракурсу та 
інших просторових спотворень. 

Згорткова нейронна мережа (ЗНМ) 
(англ. Сопуоіййопа! Мешга! Мебмогк) - це 
особлива архітектура штучної нейронної 
мережі, що імітує особливості зорової об- 
ласті кори головного мозку (21. 

На противагу до багатошарового 
персептрону, ЗНМ мають наступні відмін- 
ні ознаки: 

1. Локальна повнозв'язність: відповідно 
до концепції рецептивних полів, ЗНМ 
використовують просторову  локаль- 
ність шляхом застосування схеми ло- 
кальної зв'язності між нейронами су- 
сідніх шарів. Таким чином, ця архітек- 
тура забезпечує можливість навченим 
«фільтрам» (ядрам згортки) виробляти 
найсильніший відгук на просторово-ло- 
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кальний вхідний образ. Структура із ба- 
гатьох таких шарів еквівалентна вико- 
ристанню нелінійного фільтру і є чут- 
ливою до більшої області піксельного 
простору. Таким чином, мережа спо- 
чатку створює представлення дрібних 
деталей входу, а потім з них збирає 
представлення більших областей (2). 

2. Спільні ваги: у ЗНМ кожен фільтр по- 
вторюється на всьому зоровому полі. Ці 
повторні вузли використовують спільну 
параметризацію (вектор ваг та порогів) 
та формують карту ознак. Це означає, 
що всі нейрони у заданому згортковому 
шарі реагують на одну Й ту ж саму озна- 
ку в межах свого рецептивного поля. 
Повторювання вузлів, таким чином, до- 
зволяє виявити ознаки незалежно від їх- 
нього положення в зоровому полі, за- 
безпечуючи властивість інваріантності 
відносно зсуву (21. 

Разом ці властивості дозволяють 
ЗНМ досягати кращого узагальнення на 
задачах розпізнавання зображень. Спільне 
використання ваг різко зменшує кількість 
вільних параметрів, завдяки яким навча- 
ється мережа, знижуючи вимоги до пам'я- 
ті для роботи мережі та уможливлюючи 
тренування більших, потужніших мереж 
21. 

Принцип організації згорткової 
мережі 

Згорткова нейронна мережа будуєть- 
ся на основі операції згортки, що дозволяє 
навчати ЗНМ на окремих частинах зобра- 
ження, ітераційно збільшуючи локальну 
область навчання окремого ядра згортки. 

Класифікація шарів згорткової 
мережі 

Ключовим моментом у розумінні 
ЗНМ є поняття так званих спільних ваг, 
тобто частина нейронів деякого шару ней- 
ронної мережі може використовувати одні 
й ті самі вагові коефіцієнти. Нейрони, що 
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використовують одні й ті самі ваги, об'єд- 
нуються в карти ознак (англ. Їеаїиге тарб5), 
а кожен нейрон карти ознак пов'язаний з 
частиною нейронів попереднього шару. 
При обчисленні мережі виходить, що ко- 
жен нейрон виконує згортку деякої облас- 
ті попереднього шару (яка визначається 
множиною нейронів, пов'язаних з даним 
нейроном). Шари нейронної мережі, побу- 
довані описаним чином, називаються 
згортковими шарами. Крім згорткових 
шарів, в згортковій нейронній мережі мо- 
жуть бути шари агрегації (субдискретиза- 
ції), що виконують функції зменшення 
розмірності карти ознак, і повнозв'язні 
шари (класифікатор, який знаходиться на 
виході мережі). Згорткові шари та шари 
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агрегації можуть чергуватися, найчастіше 
шари агрегації розміщують за шарами 
згортки (2, 3). 

Згорткові нейронні мережі |4| вияви- 
лися надзвичайно успішними для широко- 
го кола задач комп'ютерного зору й інших 
додатків. Залежно від типу архітектурних 
модифікацій, ЗНМ можна в цілому розді- 
лити на сім різних класів, а саме: ЗНМ на 
основі просторового використання; ЗНМ 
на основі використання глибини; розгалу- 
жені ЗНМ; ЗНМ з безліччю підключень на 
основі ширини; ЗНМ на основі викорис- 
тання карти ознак; ЗНМ на основі бустінга 
каналів; ЗНМ на основі використання ме- 
ханізму уваги. Класифікацію архітектур 
ЗНМ наочно представлено на рис. І, | 71. 


Глубокі ЗНМ 
ЗНМ на основі ЗНМ на основі з ЗНМ з безліччю ЗНМ на основі . ЗНМ на основі 
Розгалужені ; ЗНМ на основі 
просторового використання підключень на використання - й використання 
ЗНМ - бустінга каналів і 
використання глибини основі ширини карти ознак механізму уваги 
геМе! Нідіиау Меіз Нідпмау Меіз МлдеНезМе! Здиееге апа Сраппе! Воозієсі Везідцаї 
Ехсіїайоп СМм ивіпд ті РО жі 
і вїмиогі 
АіехМеї ВезМеї ВезМеї Ругатіда! Ме! Сотреїїме тен 
і з Зацевге апа опудійіїоп 
Ме! Іпсеріїоп УЗ, МА ОепзеМеї Хееріїоп Рхоїаног Віоск АНепіїоп 
аб Іпсеріїоп ВезМеї Іпсеріїоп Ратіїу болоті 
СоодіеМеї АезМехі Здиееге апа 
Ехсіїайоп 


Рис. 1. Класифікація глибинних архітектур ЗНМ 


Характерною особливістю сучасних 
ЗНМ є наявність унікальних блоків, які 
визначають їх суттєві особливості: 
наприклад, блок стиснення та збудження 
(5диееге апа Ехсіайоп ВіоскК), згортковий 
блок модуля уваги (Сопуоїийопа! ВіосК 
Айепйоп Моадціе), модуль уваги каналу 
(Сраппеї айепйоп подіє), модуль просто- 
рової уваги (5рацаї айепйоп подіє), за- 
лишковий блок (Кезідца! БіосК), початко- 
вий модуль (Ппсерйоп  піодиіе), блок 
ВезМеХі 138-131. 

Однією з основних проблем, що 
стримує подальший прогрес використання 
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ЗНМ, є великий архітектурний простір па- 
раметрів, включаючи тип унікального 
блоку, місце розміщення в структурі ЗНМ, 
його зв'язки з іншими блоками та шарами. 

Визначення найбільш значущих, з 
точки зору ефективності параметрів, 
згорткових нейронних мереж 

Визначення найбільш значущих, з 
точки зору ефективності параметрів, ЗНМ 
проводилося в результаті експерименту 
над комбінованою мережею, яка склада- 
ється із ЗНМ, класифікатора та розгортко- 
вої НМ. 
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Для експерименту використовувала- 
ся база даних пацієнтів із захворюванням 
щитовидної залози. 

Плануючи експеримент, намагалися 
дотримуватися наступного плану: 

1. Будуть аналізуватися кількість шарів 
згортки в межах від 2 до 4. 

2. Шари агрегації буде розміщено після 
шарів згортки й перед шарами розгорт- 
ки, один шар агрегації буде використо- 
вуватися для одного, двох або трьох ша- 
рів згортки. У кожному шарі агрегуван- 
ня використовуватиметься ядро розмі- 
ром 2х2, як оптимальне. При більшому 
розмірі ядра агрегування втрачається за- 
надто багато інформації. У шарах агре- 
гації використовуватиметься функція 
максимізації, оскільки вона проста та 
надійна. 

3. Шари розгортки будуть використовува- 
тися такі ж, як шари згортки, в кількос- 
ті від 2 до 4. Розмір ядра згортки пови- 
нен бути непарним, і не занадто вели- 
ким, тому можливі розміри - 3, 5, 7. 

4. Кількість карт ознак може бути від 4 до 
64, також бажано використовувати пар- 
ну кількість 1, бажано, щоб число було 
ступенем двійки, для спрощення роз- 
рахунків. 

Зміщення | використовуватиметься 
однакове для горизонталі та вертикалі, 
завжди одиничне, для спрощення архітек- 
тури мережі. Далі буде розглянуто змі- 
щення 2Х2 або 3х3 для ядра згортки роз- 
міром 5 та 7. 

Для згортки матриці зображення, на 
краях матриці використовується заповнен- 
ня нулями недостатніх полів матриці зо- 
браження, без зменшення карт ознак. 

У якості функції активації викорис- 
товується функція Кер. У, а класифікатора 
- автоенкодер. 

Враховуючи вищенаведене, експери- 
мент проводили, змінюючи наступні 
параметри: 

1. Кількість шарів згортки від 2 до 4. 

2. Кількість шарів агрегації від І до 4. 

3. Розглядаються три варіанти: один агре- 
гуючий шар після одного згорткового 
шару, один агрегуючий шар після двох 
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згорткових шарів, один агрегуючий 
шар після трьох згорткових шарів. 
4. Щари згортки (на кожному шарі окремо): 
- розмір ядра згортки 3Х3, 5х5, 7х7; 
- кількість карт ознак 8, 16 та 32; 
- величина зміщення - фіксований 
параметр (табл. 1); 
- використовуваний крайовий ефект - 
фіксований параметр (табл. 1). 
5. Шари агрегації: 
- розмір ядра агрегації - фіксований 
параметр (табл. 1); 
- функція ядра агрегації - фіксований 
параметр (табл. 1). 
6. Класифікатор: 
- тип класифікатора - фіксований 
параметр (табл. 1); 
- кількість шарів від 2 до 4; 
- розмір кожного шару 64, 128, 256 


та 512. 
7. Операції вилучення для кожного шару: 
- відсоток вилучення - фіксований 


параметр (табл. 1). 

Фіксовані параметри нейронної мережі: 
1. Шари згортки: 

- величина зміщення І для кожного 
шару; 

- на краях матриці зображення для 
згортки використовується запов- 
нення нулями, розмір карт ознак 
рівний розміру матриці 
зображення; 

-. функція активація  використову- 
ється ВеЦО. 

1. Шари агрегації: 

- розмір ядра агрегації 2х2; 

- в якості функції агрегації беремо 
максимізаційне агрегування 
(макс-пулінг). 

2. Використовуються тільки повнозв'язні 
шари - функція активації Ве) ДО. 
. Операція вилучення не використовується. 
4. Функції ініціалізації - нормалізаційна 
ініціалізація (СПогог). 
. Функції похибки - М5Е. 
6. Кількість епох навчання 20. 
Результати експерименту наведено у 
таблиці 1. 
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Таблиця 1. Результати експерименту 


Ме Перший шар згортки Другий шар згортки Розмір Точність Час 
класифікатора навчання 
0 16 карт ознак з розміром 16 карт ознак з розміром 512-128-512 0,001742294 | 391,118135 
ядра 3х3 та зміщенням 1. ядра 3х3 та зміщенням 1. 
Шар макс-пулінгу з Шар макс-пулінгу з 
розміром ядра 2х2 розміром ядра 2х2 
1 8 карт ознак з розміром 16 карт ознак з розміром 256-128-256 0,001828256 | 315,2135794 
ядра 3х3 та зміщенням 1. ядра 3х3 та зміщенням 1. 
Шар макс-пулінгу з Шар макс-пулінгу з 
розміром ядра 2х2 розміром ядра 2х2 
2 8 карт ознак з розміром 16 карт ознак з розміром 512-128-512 0,001830939 | 344,9284253 
ядра 3х3 та зміщенням 1. ядра 3х3 та зміщенням 1. 
Шар макс-пулінгу з Шар макс-пулінгу з 
розміром ядра 2х2 розміром ядра 2х2 
3 8 карт ознак з розміром 16 карт ознак з розміром 512-256-512 0,001847606 | 400,4870558 
ядра 5х5 та зміщенням 1. ядра 3х3 та зміщенням 1. 
Шар макс-пулінгу з Шар макс-пулінгу з 
розміром ядра 2х2 розміром ядра 2х2 
4 16 карт ознак з розміром 16 карт ознак з розміром 512-256-512 0,001856388 | 432,3665767 
ядра 5х5 та зміщенням 1. ядра 3х3 та зміщенням І. 
Шар макс-пулінгу з Шар макс-пулінгу з 
розміром ядра 2х2 розміром ядра 2х2 
5 8 карт ознак з розміром 16 карт ознак з розміром 256-256-256 0,001867345 | 323,8970006 
ядра 3х3 та зміщенням 1. ядра 3х3 та зміщенням 1. 
Шар макс-пулінгу з Шар макс-пулінгу з 
розміром ядра 2х2 розміром ядра 2х2 
6 8 карт ознак з розміром 16 карт ознак з розміром 512-64-512 0,001872922 | 395,7997081 
ядра 5х5 та зміщенням 1. ядра 3х3 та зміщенням 1. 
Шар макс-пулінгу з Шар макс-пулінгу з 
розміром ядра 2х2 розміром ядра 2х2 
7 8 карт ознак з розміром 16 карт ознак з розміром 256-128-256 0,001883072 | 375,089128 
ядра 5х5 та зміщенням 1. ядра 3х3 та зміщенням 1. 
Шар макс-пулінгу з Шар макс-пулінгу з 
розміром ядра 2х2 розміром ядра 2х2 
8 8 карт ознак з розміром 16 карт ознак з розміром 512-128-512 0,001907312 | 396,17189 
ядра 5х5 та зміщенням 1. ядра 3х3 та зміщенням 1. 
Шар макс-пулінгу з Шар макс-пулінгу з 
розміром ядра 2х2 розміром ядра 2х2 
9 16 карт ознак з розміром 16 карт ознак з розміром 512-64-512 0,001910896 | 391,7317238 


ядра 3х3 та зміщенням І. 
Шар макс-пулінгу з 
розміром ядра 2х2 


ядра 3х3 та зміщенням І. 
Шар макс-пулінгу з 
розміром ядра 2х2 


Залежність часу та точності від роз- 


міру повнозв'язних шарів для двошарової 
ЗНМ показано у табл. 2. 


Залежність точності від розміру пов- 
нозв'язного шару для двошарової згортко- 
вої нейронної мережі наведено у табл. 3. 

Залежність точності від розміру пов- 


нозв'язного шару для двошарової ЗНМ на- 
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ведено у табл. 4. 


На основі аналізу результатів пере- 
вірки комбінованої ЗНМ на перевірочній 


вибірці, представленій у табл. 1-4 можна 
визначити значущі параметри для ЗНМ: 

1. Кількість шарів згортки. 
2. Кількість шарів агрегації. 
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Таблиця 2. Залежність часу та точності від розміру повнозв'язних шарів 


Розмір класифікатора Середній час навчання Середня похибка 


128-128-128 359,03918 0,002336 
128-64-128 365,41794 0,002331 
256-128-256 386,7935667 0,002081833333 
256-256-256 377,0971714 0,002196285714 
256-64-256 372,98418 0,00224 
512-128-512 408,1395429 0,002040428571 
512-256-512 402,3346875 0,00207175 
512-64-512 407,6629857 0,002037285714 
Загалом 387,538866 0,00215036 


Таблиця 3. Залежність точності від розміру повнозв'язного шару для двошарової згорткової 
нейронної мережі 


Таблиця 4. Залежність точності від розміру повнозв'язного шару для двошарової ЗНМ 
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3. Взаємне розміщення шарів згортки та 
агрегуючих шарів. 
4. Шари згортки: 
- розмір ядра згортки (на кожному 
шарі окремо); 
- кількість карт ознак (на кожному 
шарі окремо); 
- величина зміщення (на кожному 
шарі окремо); 
параметр крайового ефекту. 
5. тери агрегації (на кожному шарі окремо): 
- розмірядраагрегації; 
- функція ядра агрегації. 
6. Повнозв'язні шари (на кожному шарі 
окремо): 
- кількість повнозв'язних шарів; 
- розмір кожного шару; 
- тип класифікатора: автоенкодер. 
7. Наявність операції вилучення для кож- 
ного шару - відсоток вилучення та ви- 
падкова функція. 

Для оптимізації структури та пара- 
метрів ЗНМ використано генетичний 
алгоритм (6. 

Постановка задачі структурно- 
параметричного синтезу  згорткової 
нейронної мережі 

Задано скінченний набір 
1аЇВ,Т 721,..РО пар типу «атрибут- 


значення», де КУ; - вхідний і вихідний 


вектор НМ, відповідно. 

Необхідно синтезувати таку опти- 
мальну НМ на основі навчальної вибірки 
/, яка забезпечувала б ефективне розв'я- 
зання прикладної задачі (класифікації, ап- 
роксимації, прогнозування). Векторний 
критерій оптимальності визначається як 


-ЩО), 100) зорі, 
де ПО9- Ву (9 похибка узагальнення, 


що визначає величину похибки розв'язан- 
ня поставленої задачі на перевірочній ви- 
бірці; 1,(х) - 5(х)- складність нейронної 
мережі (кількість міжнейронних зв'язків); 
Х - вектор значущих параметрів. 

Оптимізація структури та пара- 
метрів ЗНМ 

Для оптимізації структури та пара- 
метрів ЗНМ використовується багатокри- 
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теріальний генетичний алгоритм |б|, який 

має наступні особливості: 

- перехід від обмежень до додаткових 
критеріїв; 

- використання концепції Парето- 
оптимальності, домінування та шщіль- 
ності розв'язків для обчислення при- 
стосованості рішення; 

- адаптивне визначення ймовірності 
схрещування та мутації; 

- використання особливого типу кросо- 
вера - пеїєрБогроса сгоззоуєг; 

- підтримка зовнішньої множини індиві- 
дів (архіву) для реалізації елітизму; 

- кластеризація для ліквідації згустків то- 
чок та підвищення репрезентативності 
рішення; 

- «лікування хромосом» на області адап- 
тивного визначення ймовірності схре- 
щування та мутації; 

- використання особливого типу кросо- 
вера - пеїєрбогрооа стоззоуєг; 

- підтримка зовнішньої множини індиві- 
дів (архіву) для реалізації елітизму; 

-- кластеризація для ліквідації згустків то- 
чок та підвищення репрезентативності 
рішення; 

- «лікування хромосом» на області по- 
чаткових обмежень для уточнення 
рішень. 

Опис хромосоми 

У нашому алгоритмі кожному екземп- 
ляру відповідає 1114 бітів. Їх можна предста- 
вити у вигляді 6 генів - За кількістю шарів 
згортки та класифікатора. У перших трьох 
генах (генах згортки) можна виділити 

7 полів: 

1. Наявність шару І біт (при 0 в першому 
гені екземпляр потрапляє в біореактор). 

2. Кількість карт ознак 7 біт - від 4 до 
256. 

3. Розмір ядра 3 біта - ядро має розмір від 
3 до 8 включно. 

4. Зміщення 2 біта - від І до 4 включно, 
при зміщенні більше половини плюс 
0,5 (п/2 -- 0,5) екземпляр потрапляє в 
біореактор. Тобто, найбільш можливе 
зміщення 4 при розмірі ядра 7 або 8. 


О У.М. 5іперіалоу, О.І. СпрштаспепКко 


155 2710-1673. Штучний інтелект, 2020, Хо 4 


5. Огорошці, шар виключення. Ген має роз- 
мір 5 бітів, можливі значення виклю- 


У останніх трьох генах можна виді- 
лити 3 поля: 


чення від 090 до 3097. 1. Наявність шару 1 біт (при 0 в першому 
6. Крайові ефекти згортки, І біт - визна- гені екземпляр потрапляє в біореактор). 

чення зменшення розміру зображення 2. Розмір повнозв'язного шару І1Ї біт - 

при виконанні операції згортки. шар має розмір від 0 до 1024 включно. 
7. Щар агрегації (пулінгу), 3 біта. Є п'ять 3. Огороці, шар виключення. Ген має роз- 


мір 5 бітів, можливі значення виклю- 
чення від 090 до 3090. 
Схематичне зображення однієї хро- 


можливих варіантів: наявність шару аг- 
регації, розмір агрегації 2х2 або 3х3 та 
функції агрегації - максимізаційна та 


усереднювальна. 


мосоми показано у таблиці 5. 


Таблиця 5. Масштабоване представлення хромосоми, усього 30 генів 


Наявність 
І біт 


Кількість 
карт ознак 
1 бітів - від4 
до 256 


Розмір ядра 
3 біту - від 3 
до 3 включно 


Зміщення, 
2 біту 


РДгороці, 

5 бітів, 
можливі 
значення 

виключення 
від 090 до 
3096 


Крайові 
ефекти 


Шар агрегації 


(пулінгу), 
3 біта 


Наявність 
І біт 


Кількість 
карт ознак 7 
бітів - від 4 

до 256 


Розмір ядра 
3 біту - від 3 
до 8 включно 


Зміщення, 
2 біту 


Дгороипі, 

5 бітів, 
можливі 
значення 

виключення 
від 096 до 
3096 


Крайові 
ефекти 


Шар агрегації 


(пулінгу), 
3 біта 


Наявність 
І біт 


Кількість 
карт ознак 7 
бітів - від 4 

до 256 


Розмір ядра 
3 біту - від З 
до 8 включно 


Зміщення, 
2 біту 


РДгороці, 

5 бітів, 
можливі 
значення 

виключення 
від 096 до 
3096 


Крайові 
ефекти 


Шар агрегації 


(пулінгу), 
3 біта 


Наявність 


Розмір 
повнозв'язного 
шару 11 бітів - 
шар має розмір 

від 0 до 1024 
включно 


Дгороші, 5 бітів, 


можливі 
значення 


виключення від 


096 до 3097. 


Наявність 


Розмір 
повнозв'язного 
шару 11 бітів - 
шар має розмір 

від 0 до 1024 
включно 


Дгорошці, 5 бітів, 
можливі 
значення 

виключен-ня від 

096 до 3090. 


Наявність 


Розмір 
повнозв'язного 
шару 11 бітів - 
шар має розмір 

від 0 до 1024 
включно 


Дгорошці, 5 бітів, 
можливі 
значення 

виключення від 

096 до 3090 


Навчальна вибірка формується в ре- 
зультаті використання системного підходу, 
що включає: видалення шумів на зобра- 
женні, сегментацію зображення, виділення 
границь на картинці, формалізацію де- 
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скриптора об'єкта, класифікацію дескриптора. 
Найкращий результат наведено в 
таблиці 6. 
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Таблиця 6. Найкращий результат 
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о 
в - 
З з пе ЕЕ 
П. з Другий ш З СУ 5 5 
ана дівайнно я х Е т БА Параметри мережі 
згортки згортки С З х З 
ср тр і 5 
з 3 
72 карти ознак Ре 
12 карт ознак з з розміром б с р 
розміром ядра 3х3 ядра 3х3 та П мі З ГПЗ": (256), Зм": (1, 11, КЕ": 
та зміщенням І. зміщенням 1. ж а З ГО", 01, Пр": 'М-10, Б-у, Тд": 
Шар макс-пулінгу Шар макс- 6 З рай Ж 46, РП": |2, 21, ВПЗШ": 01, ВЗ": 

з розміром ядра пулінгу з І 25 9 ГО, 01, РЯ": |З, 31, КЯЗ" (12, 721) 

2х2, розміром ядра 2 З то 

2х2. ій 
ХПЗШ - повнозв'язний шар; Зм - зміщення; Література 
КЕ - крайові ефекти; Пр - пращури; М - мати; 1. АІ-Маггоцді Н. (2009). Раїа Сіизіегіпо ПЮбіпо 
Б - батько; Ід - ідентифікатор; РП - розмір пу- а Моаїйед Кимапага Ейпег, Меига! Мегугогк. 
лінгу (агрегації): ВИЗШ - виключення повно- ІШіегпайопа! Уоїпі Сопіегепсе. 128-132. РОЇ: 
о р ори В 10.1 109/1СМК.2009.5178638. 
з'єднаного шару (дропаут); З РУКИ ОНИ 2. ІеСип У., Вовег В., РепКег 7. 5., Непаег8оп Ї., 
ЗГОрткового шару РЯ - розмір ядра згортки; Номагі В. Б. Ниббага МУ. апа ТасКе! І. Р. 
КЯЗ - кількість ядер згортки. (1989). Васкргоразаїіоп Арріїеа іо Напауутіпеп 
Для подальшого покращення вибра- нів 1. | б 541-551. РОГ: 
ПИЛА а і 3 песо. .1.4.541. 
ноб ЗнннО таблиці 6, ПРПКЮЛЮМи ЗНМ, прог 3. Тее Н., Стоз5е В., Капоапаїй В., апд Ме А. У. 
понується розміщувати спеціальні блоки (2009). Сопуоійіопа! 4еер Бейе) петурогкя ог 
(див. розділ «Класифікація шарів згортко- зсаїабіє ипзирегуізгд Іеатіпе ої НіегагсНіса! 
вої мережі») між згортковими шарами т гергезетіатіопу. т ІСМІ/2009. ДОГ: 
от мереж маже знортко й о 10.1145/1553374.1553453 
тнарам и: «МАКСА ни у Можливі варіанти 4. Синєглазов В. М., Чумаченко О. І. (2017). 
вибору специфічних блоків, структури та РДеер Іеатпіпо Сіаз5ійег Вазед оп МЕЕСІАЗ55 
послідовності їх з'єднання визначаються ап МЕЕРКОХ Меигаї Мегургіз. Матеріали 
з ще : міжнародної науково-практичної конференції 
че ражунотовеленорациї на Зенове викорнег «Інформаційні технології та комп'ютерне 
тання генетичного алгоритму. моделювання». - Івано-Франківськ - Яремче, 
Висновки Україна (15 - 20 травня 2017 р.), 278-281. 
Для виявлення неформалізованих 5. Чумаченко БЕ. И., Левицкий О. Ю. (2011). 

. ; Разработка алгоритма обработки 
ЗЛЕМЕННІВ розроблена МЕТОДОЛОГІЯ оброб- изображений | для | задач | диагностики. 
ки відеозображень на базі ЗНМ, в якій оп- Блектроніка та системи управління. К.: НАУ, 1 
тимальним чином визначаються парамет- (27), 57-65. 

ЗНМ . рі 6. Дбигоузку Міспав! 7., 5іпевіагоу Місіог М., 
ри УЕАНЕ ООРОВЕ ВИКОрневання соратнй Сритасбепко  Оіспа І. (2020). Апгйїсіа! 
критеріального генетичного алгоритму з Ініейієепсе Бузіет5 Вазед оп Нурфгіад Меигаї 
подальшим використанням генетичного о да 390. ДОГ 10.1007/978-3- 
алтор ПЕОВУ; р РИЗначення специфічних 7. АзікаШав Кап, Апабіа 5ораї!, Опате 7ароога, 
блоків, структури та послідовності їх з'єд- апа Адза 5асед Оигезбі (2020). А Зигуеу о) те 
нання; навчальна вибірка формується в Кесепі Агспіїтестигез о, РДеер Сопуадіийопаї 

: рр Меига! | Меїурогкя. | Рибійзред о їп | Агбіїбісіа! 
РОЗУСТЕЯТІ СРАНОрнкапнно спятем ро тя ПиеПівепсе Вемієз, РОЇ: 10.1007/510462-020- 
ходу, що включає: видалення шумів на зо0- 09825-6. 

: : : 8. Егапбсої5  СроПеї. (2017). Хсеріїоп: Реер 
браженні, сегментацію зображення, виді- іеитиль яр рерійніхе боратарів 
лення границь на картинці, формалізацію Сопуоіитоп5. агХіу:1610.02357У3 |с8.СМ| 4 Арг 
дескриптора об'єкта, класифікацію  де- 2017 

9. 5ашіпє Хіе, Ко85 Сіг5біск, Ріоїг РоПагт, 


скриптора, що дає можливість підвищити 
точність розпізнавання. 
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